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DE 195 31 967 Al discloses a method for training a neural 
network with the non-deterministic behavior of a technical 
system. During the training, the weights of the neural 
networks are adjusted on the basis of cost function. The cost 
function evaluates an optimum system behavior and amplifies 
weight adjustments according to the optimum behavior. 

DE 195 31 967 Al represents technological background with 
regard to the use of neural networks. It does not disclose a 
■method for detecting the modes of a dynamic system with a 
drift segmentation model as claimed in the above U.S. patent 
application. 
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Prufungsantrag gem. § 44 PatG ist gestellt 

@ Verfahren zum Training sines neuronalen Netzes mit dem nicht determfnlatlschen Verhalten eines 
teohnischen Systems 

@ Mft der Erfindung wfrd ain Trainingsverfahren fSr neurona- 
ls Netze vorgastallt bal dem dte GevAHchte wShmnd des 

Trainings mit HQfe einsr Koatwifunktson atngastaJtt warden, 

Dabal bawertet dia Kostanfunktlon ain gOnstigea Systsmvar- 

haften des tachnlschan Systems und varstarkt dadurch 

solcha Gewichtseinstelhingan* wihrand andera, walche aIn 

ungunstigea Verhalten das technfachan Systems bswirken, 

abgarohwicht warden. Durch sins Stfirting der Steltgr6B6 

mft einam ftauschan von bakannter Rauschvertailung war- 
den zuf&lllga St5rungan etzaugt waiohe die mathamatlsche J 

Bearbeltung dar Gewtchtselnstellung wessntlbh eriaichtem, 

da sich die hisrfOr erfordedichen Terms varainfachan. So 
^ wtfd mit dar Erflndung quasi durch sine statfstfsche Matho- 

de und Anwandung elnar Kostsnfunkiion auf dis vom 
( teohnlschsn System odsr ^elnam ModsJI abgsgebsnan 

Waits die rfchtfge Gewfchtsainstallung fur das neuronafa 
^ Netz gefunden. 
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Die Erfindung beziefat sich aaf dn Leraverfohren zur aeuronalen Modeffienmg voadynamiscfaOT Prozessai 
init dem crrdcht werden soil, daB das neuronale Netz in der Lage isf Prozesse mk hoh«a Antdl an stochasti- 
sdieaVorgSngenzur^in. ^ « ^ 

Neunmale Netze findea m (£e vidnatigsten technodien Celnete Engaog. UberaQ dort, wo es gut, aus 
kompleren tecfanischen Zusammenhangea and aos unzureichcnden Infonnationen Eotscheidcngcn abzuldten, 
erwdsea sidi neumnale Netze ats besonden gedgnet Zar BSdung dner oder mdirerer AusgangsgrdBen 
wcnfen dem neuroiialeii Netz bdspielsweise dne oder mdirere Eiagiiigsgr5Bra zugefOhrt Hbrzu wird em 
wolA.es Netz zunfidsst flilr den spezieUea Eteffltzfall trainiert an^Cefiendgenmifisiert and daiiadi wird es mxt 
dnem anderen Datensafz als dot TYainingsdatea vaBdiert Neuronale Nefze erwdsen fur vide f S n s atzflHle 
ahbescaiersgcdgnetdatReuniversdlt^^ ^ . „ 

Em |]au% aof tretendes Prablem nn Zu^mmenbang mit dem Einsatz vm neuronalen Netzen bestebt aHer- 
dings darin, dafi banfig cfie Hngan^daten zum Trainbig, oder bdm Betrieb des Netzes nidxt vollstandig sbid 
Dieser Sadiverhah nod audi (fie Talsadie, daB die MeBwerte fOr den Aufbau eioer Zdtrdbe, wddie dem 
nmrnalen Netz zugefOhn vird,biufigun|^nauoderYerraasdit slnd^bewi^^ tdlweae sdilecbte Lemer- 
gebni$sed«- Netze erztdt werden. Bei Prozesmmithohem Antdl an stodiastiadien VorgSngen tritt Insbespn- 
deiedas Problem anf, ckdB dieTrainisgsdaten ZufaOsdiaiakterbabeaunddesfaalb bisber kdne Mediode erastiert 
neuronale Netze mit dem Verhaltea soldier Systane zu trainteren. Bishng gtbt es kdne An^tecei wddie dieser 
20 besonderenProblematikRechmmgtragea . 

Die der Erfmduog zugnmddiegaide Aufgabe bestebt desfaalb darin. ein Lemverfabren anzugebeo. nut dem 
der Lernvorgang bdm Tiammg does neoronatai Netzes vcrbessert werden kami.wddies das Veriialtai dnes 
tedmisd^ett Systems mtt bdiem AnteH an stodsastisdien^Vorga^^ 
Diese Aof £^be wffd gonftB den Mevkmden des Patentanspi^^ 
25 Wdto'bOdimgeaderErfinduQgergebeaskfaausdenabbiiig^ 

Besondera vorteilhaft k5nnen wk dem erfindtmgsgemaBai Verfahren neuronale Netze mit dem Verfaallen 
v^n t^n;«^iw% RygtMni^n fnlntf^ wttrrfen, wefehfi gin nahezn vdhtSndlg stodiaatiKfaesVeriialtenaufwdsen, 
da sidi das erfindung^emlBe Vvfabren statstlsdier Methods zur Answertung der Emgang^ten beim 
IVaining des neunmalen Netzes bedBent Besondors vorteffliaft werden bieiza die St«Qgr5fiendaten, zur Erzett- 
30 gong dner neuea RegelgrGBe des tedmisdien Systems, nut Hilfie dnes Ra nsdien s von belcannter stadsdier 
Vertdhmg varilcrt Duidi doe biuSge Wlederhdimg diesra Voi^^ 

tedmiadien S^ms anband emer Kostenfirnktion, wobd sdche Gewicfate^ wddie dne Verbesserung des 
Verbaltens des tedmiadien Systons in Bezug aof ein gewOttsdttes 

funkdon starker gewit^tet werden. kann etne optim^e Gewidttsdnsteflung des neuronalen Netses errddit 
35 wwden, Zur Einstellungd«*GeTObte In Bezug auf den Fehlogradicnten werden bekannte Verfahren fur das 

Trdningn«]roiiaIer Netze verwendet . 
Besonders vorteiUmft kami (Be Anzabl der zum Trdning des neonmden N^zes an^ 

varBgrt wrrdm, danrit ist dg*" ffn ^y m Hia Magfichkdt gegeboy die Genflniykdt der Einstelhmg der Gewu^- 

te des neuronalen Netzes bt Abbftn^^eit der hm zur Y^fl^yng itdienden Rechenzdt oder Re dienkag azitftt 
40 zubeeii^usBen. 

Vorzugswdse k&men durck ModdHerang oder durdi Einsatz des realen tedmisdien Systems mebrane 
^Hreiben gewcHm^ werden, undderen Mittelwerte zomTrdnnig des nemxtnaien Netzes vcrweudet werden, 
y> itf>^yf rff Htatturiapha fflgnifikgiiz fflr die Ridrtif^reit dcT Tramingswerte ergibt. 
V<vtdlbaft wird bdm Tiaining des neuronalen Netza als befcannte Rausdnrertdbmg zur Variatiw der 
45 StdI^«Be dne GauBvertdlung verwendet, da sidi damit der Fddergradfcnt zum Training des neuronalen 
Netzes besonden einfadi beredmea llBt 

Vortdlhaft werden mdircre Zcitreihcn simulicrt und gemesscn, da so cine Anssagc fiber das Vcrfeahender 
RegdgroBe des teduusdien Systems unterversduedenen Umstinden erfiaiten werden kann und sidi dadurdi 
die Statistik d(7 Zeitrdhe Yotessert Vortdlhaft kann nk^t nurdie Stefl 

dnem Rausdien bekannter Vertciltmg flberiagcrt sdiu ohne daB das Lernverhahen des neuronalen Nctzca nadi 
dem erfindungsgemftBen VerMxren beeintrftdxtigt wird. 
Im folgenden wird die Erfmdung anband von f^guren wdter erButert 
Fig. 1 ze Ygt eine ^trdhe und em Systemverisalteiii 

Fi6.2gibteinBei^ddMerBndungsgcniaBenVerfairensaa 

Fig. i zdgt dne Zettrdhe von MeBweiten, w^e bdspidswdse dnem neuronalen Ncte zugmhrt werdai 
kfinnen. Me ateiteruag dieser Figur diem insbesondcrc dazu dfe mathemati^^ 

ies erfindmigsgemlBcn Verfabrais zu durdilaidttea GemaB airer zeitlidigi Abf olge werden <fiese M eBwme 
bdqitdswdse voD dnem technbdienSystra erfaBt und gemiB 3ncr z 
net Bd^dswdsewinlinF^ 1 davcm ausgegangen, daB der Wert yt-afdilLDl^ 

Werte, als benadibarte Werte dieses fehtoden McBwertes, sind yt-^p yt-i yt-i und yi, Ein sddi ^f'^f 
MeBwCTth dner Zettrdhe kann bdBq>idswdsedadunAentstdien,daBzm 

ztff WftTtftftiTfaahif T^ i^ f^inktimMerte, oder daB es zwisdien einzdngi gemegenen Wertcn gOnsttg ersJidiU, 
ora das neuronale Netz besser zu trainiercn, cBesem dnen wdtcren Wwt zuzufuhiea der fblgjtdi noch zu 
bestimmen 1st Bdsjaclswdse winl m Fig. 1 wdter davon ausgegangcn, drf der W 

blanket relevanten Werte, als benadibarte Werte ieses fdxlcndcn MeBwertes, sind yt-s yt-t Jt-2 und yt_i- 
Die Anwendimg des erBndungsgemiBen Verfahrens zum Traimng hat nadi der erfinderisdiea Mee zur FolgCr 
daB das Netz mit besser zutreffendcn Gewidrtun^sfaktoren au^estattet wW. Dies ist dw FaH wcil adi die 
Erfindung der Statistik bcdient and es so cnnfigik^t audi aus Zeitreifaen, wddic Pr^^ 
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sdien AnteH von VorgSngen cntnoaimea werden, die relevantcn Traimagsdaten zu e^ctrahieren. 

Besonders vortetlhaft werden die Datea fflr die StellgraSe dabci durch em Ransdien mit bekannter Rauscb- 
vertdlong, wie beisptelsweise Gaufi-, oder Poissoa-Vertcflung variiert Hiwdurdi wird die Enstellung dw 
Gewichte an den Mearonea <tes Netzes weseodich vereinfacht, da sich die mathematisdiea Tenne die 
Berechnung der Regeldifferenz w^entlich einfoclier gestalten lasseo. Dies ia Eombinatioa mit einer Kosteo- 
funktioiv welcfae solche GewichtseinstellungOT begunstigt, cEie einen gewflnsditea Soilznstand am tecfanfcchen 
System hcrstcHen, ergibt eln vorteilhaftes Traiaingsverfaiiren, wefche mit vergldchswesc geringem Recbcnauf- 
wand za guten Trainingsleistimgai der Netze Rihrt 

Fig- 1 zeigt dabei die Zeitreihe ia Verbindimg rait eiaem zu traimewdcn nearoaalen Nctz NNw^ Es ist za 
crk«men, dafl y eine zeitafafafin^e VariaMe darsteflt, wdche d^ Systemverfialten SY eiues tedmisdiai Sy- 
stems reprflsentiert Wie ericannt wcrden kann, cntsprecheo die Werte yt bis yt-§ MeBwerteiv wdche dem 
Systemveriauf SY entnommen wcrden. DtrnA die gestridieltca Pf cile zu den jewc^en Zdtpunkt«i ist symboB- 
dert, dafl diese M^werte dem n«^nalea Netz NNw beim Training zugefQtirt werden raOea 

Hier ist der fragfiche MeBwert M fOr den Zeitponkt yt-2 niclit vorhandcn. Fur diesen Mefiwert M 1st seine 
WahrschcinHdikeitsdicfate el angegcben* Diese WahrschdnOchkeitsdichte e kaim beispielsweise aos dner vor- 
gegcbenrai bekanntea Fdilerverteiluiigsdichte der Gbrigen bekannten Meflwme rflckgerecfanet werden. Insbe- 
sondere wird dafaei ausgemitzt, daB sich der fefalende Mefiwert zwischoi zwei bekanntea MeBwerten befindcn 
nmS und damit auch dessen Fehler cbrch die Fehl^ der boiadibarten und d^ restlicfaen MeBwerte der 
Zeitreihe begrenzt wxnL Die zugrundeliegende Zeitreihe llSt sich wie folgt beschrdben: 

Dabei ist f entweder bekannt oder wird hinrdchend durdi ein neuronales Netz modelG^ at bedeutet dabei 
emen additiven unkorrelicrten Feller mit zeitikiem Mittelwcrt a Dieser Fehler weist dabei und das ist fur das 
crfmdungsgemafle Verfahrcn essentiell eine befcannte oder vorgcgebene WahrscheinfichkeitscBchte Pb (e) auf 
mid versinnbifallicht typischerweise <fie unmodeUierte Dynamik der Zeitreihe. fieispieisweise soil fOr dne soiclie 
21eitreihei ein zukGnftlgcr Wert vorhergesagt werden, EHibei ist zu be^chten, daB zukihiftige Werte relativ zu der 
momentanen gewahlten Zeitposi&m zu verstehen smd Das hdfit St einen Zeitpunkt yt-s ist der Zei^unkt yt-4 
ein zokonftiger Wert Unter dies^ Voraussetzungen laBt sich die bedmgte Wahrscfaeinlicfakeitsdidite fOr einen 
vorherzusagenden Wert der Zdtreihe wie foigtbeschrdben. 



p ( yr I y« .yi-a--yt^) = ^eCy-f (y*-i,y:-2»-.yt^)) (2 ) 

Wie bereits erwShttt muB die Fefalerverteilangsdichte bekaimt smxL Diese Verteilungsdichte kaim entweder 
anhvxd des SystemveitLaltens und bekamrter anderer ftuSerer OrOBen ermittelt oder vorgegebea werdea ^ne 
typisdie Feh[ev«rte2un& die in der Praxis auftritt ist die GauSverteilung, Mit einer sokhen angenomnienen 
GauB'schen Fdiiervertdhmg LfiBt sich die bedmgte Wahrscheinlichkeitsdichte wie folgt beschreiben: 



p ( y, 1 yiHi.yv-2,-^.yt-N)=Q(y»;f(yt-if-^.y»:,»X<y') o ) 

Darin bedeutet G{x;c,<f) cfie Rotatkm (Or erne normale Didtte; die bd x bestinunt wird nnt ekem Zentrum C 
und einer Varianz d^. Geht man davon aus» daB das zu besdireS^ende System in Form efaier Folge von Werten 
anf dner Zeitadase dargesteOt wird, so kann man die etnzelnen Werte von yt auch als Ziif aBsvanabie in emem 
probabilistischen Netzwerk auffasseo. Beispieiswdse besteht das Problem des Netzes darin, einen Wert der 
Zeitreihe vorherzusagen, mdem die vorhandene Information aus den restlidien Werten mOgOdist voOstindig 
verwendet whi Unter Voraussetzung der Annafamoi, die zuvor gemadit wurden, laBt sich die gesamte Wahr- 
scheiniichkdtsdidite der Zeitreihe wie folgt besdu^iben: 



p(yi.yi>— yrX=^i>--yM) riJ*(yjiyw"MyMj) 

DabdwiiddavonansgegangeOfdaByt-kmitk^ NderfeUende Wert ist Mit der Bezekjm^ »{yt-k} 
fur die Mwige der unbekannten Werte und y" » ^t-u.-^yt-k-Nj/fyt-lJkannderOTratcte Wertder indcr 
Zd^dfae vcriierzusagen ist wie foigt besduieb^ werden: 

E(yJM^j) - Jf(y^w.My^.-.,y^)P(y"ly")^' (5) 

Dabd gelten folgmie Voraussetzungen: 
Mt-t stdit fOr aHe Messungen l»s zum Zdtpunkt t- 1. Die voranstehende deicfaung ist die gnmdlegeade 



Glddiimg mr die Vorh««ige mk f chtendeo Dat^ 
nUit mir VOT den Wertcn der Zdti^ihe vor ^ 

t-fcDerGnmdbwtBfatdarfaitdaBdcVarbblenmy" U yt cin mrniimiles Markov blanket von yt-k formeiL 
Dieses minimale Marico? Hanto bestcht aus den dirdtten Vorfahren and 6en dkektea Nadilahrea dner 
Variable mi aflcn dlrdctcn Vorfahren von VariaMcn des direkten Nachfolgon. Im betrachtBtcn B«^d m 
Fig. 4 find die dbrdcten Nadrfahren yt . . .yt-k^i- Die direkten Vorfafaren stnd: 

yt-k-l*.*yi-k-N 

unddlecfirefcten EltCTdtf NachMgerder Variablensind: 
yt-i«..yt-k-N+i» 

Ans den thcoretwbra Gmndiagcn ist bekamit, daS dne Variable un a btiS ngig von etner andcrcn Vanablen 
dieses Netzverkes ist, wenn die VariaUm inneriialb des Uaikov blankets bekannt smd. Deshalb wird die 
bendtigte bedingte Dichte avs ddchimg (5) wie f olgt bestinunt: 

Der hicT bcschricbcne Fall eines fcWcnden McSwcrt cs kann andh O auf mdiancre nebendnander Ji^pei^ 
feblende MeBwerte ansg^lehnt wenlen. Falls dies der FaH ist; kann die bedingte Didite in Qddnmg (5) wie im 
folgend^ bescbriebeiu besdmnit werden. FQr diesen FaO sd 



y c{y^.y,^,^..y^} (5c) 

die Menge alter fddenden Werte der Zdtrdbe zwisdiendem Zdtponktt- 1 ond t — Hand weiterfain sd 



y" £ {Prt »yrtM-»yi} (Sd) , 

£e Menge aQer MeS w«te bis zum Zd^onkt t - L Audi gitt 

p(yMy")a p(yHit-.3^»yi) (Se), 

wdbd die redite Sdte in (5e) ans dddxnng (4) erbahen vnid. Im al^cmdnen ist das Integral in Gktdiung (51 
wobd P&r"/y")inGfcidiaag(5)a>er dieGldduin^ 

falls dies dnc mchdineare Funktion ist, nidit analyttsdi Idshar. Details fur die nnmcrisdic ™^ 
jtatiatiadier Mgthodep Wfrdft" ^ 7Ti^rfim#>filiftiig mtt 7 anggggben- Fflr den FdL daB ein wdterar MeB- 
wcrt; dfflr Zehreihe nadigdWdet werden aoU, debt das Vcrfd^ 
IkAkdtsvertrilang der fdstaiden Werte vor, BeM*w^ 

flirdfnZffltimnktyt ^n^r^^Ti ^T^^m Tyirrfi<!SimMeftwertMk^ 

Diese Wahry^'^^'^kffifyfWrtg e2 kann bdsptebwdse nadi dem erfmdungsgemlBoi Verfthren ans emer 
wgegebeien bckamitcn FdilervmdIungscfiditedCT fibrqiea bekamitcn MeBwerte rfldEgcredmet wordcn. Fta- 
die Appraxiniatbtt der Wabradidnlidxkdtsvertdlung von zwd sddien fdxlenden Werten L «nd Mwttd 
maidist L beispidswdse als bekannt vwaoHgesem oder gesdrfltzL Daraos wird die Vwtdfamg von M 
net nnd gNoftB <Ueser Vertdlung dn Wert fOr M zufilig besdmmL Mit die»n bekamtten Wm M wnd 
ansdilicB«md in dOTdbcn Wdse L bestknmt Meser Vocgang wird tt^^ 

approdmiert die gandnMme Wahrsdidnlidxkeitsvertdlung von L ond M. Dieser hcradowvorgang Itoft 
vorzngswdsesoluige ah^bis dne hinrddiaide Genan^dt der Werte g^eben ist; oder Iris das Netz gfflan 
genng traimol ist Fflr mdjr als zwd ffeUcnde Werte vwfthrt man analog, Es wird immcr jcwdls cm Wert 
gemSB der VoteStmg besdnmit, dfe skA ergibt, wenn aUe andercn ab bekannt angei^^ 

Fllr dm FaD, daB yi, ... yt mOgBdie Werte der Zeitrdbe darstdlot soflen y" S fcfi, ytj die MeBwerte 
bczdrfmen nnd y» « (yip yt)\y° alle imfaekannten werte bczek^ 
Fmiktion f nioddUeren soB, wenfe bd^idsweise mh dnem Satz vvm 



Die bgarithmisdiB Wahrsdieinlicfakehsfunktion kutetdann: 



_^(yilyw,-,yi^) (6) 



e^proadmiert imd fOr das neuronale Netz folgender Zusammenhaiig fOr die Berechmmg der Fehl^erteifaings- 
dichtegat: is 



P''(yi \ yM>yiw2..-iyr^)=Pe(yt -NN^(yt.l»y^-2-My|.K) (7) 



20 

FOr das Lemtn mit Hilfe von Backpropagadon, oder anderer Gradienten baderter Lemalgarithmeii vnxd nvn 
nocfa der Gradient der logarithimsdiea WahrscheinUdikeitsfankdon bendtigt, wddier sich.zu: 



ergibt Bs ist anzumerken* da6 faierbd von bekannten Ausgang^dmgungen fur y i, , . , y m ausgegangen winL FOr 
den Fall, dafidneGauBverteihmg for die Fehierv^eilangv(»1!egter^bt stchdaraus; 30 

wobcd 



40 



<fie f ehlend^ Werte f€r Etngioge des Netzwerkes darst ellen und (8a) zeigt; daS falls die 71 , . . yi - n bekannt 
siod, das Inte^al verscbwindet 

Falls die MeBwerte von dnem zu531ztidie& aber bekannten Ranschen Uberlag^ werden ergeben sich die 4S 
fo{genden Zusammenbfingc Bes{»diswei$e gilt TK^eden 

= /(y^4»y,-a-"ty^^)+€i « 

In cfieser Variante der Brfindhing soB jedoch kein direkter Zugriflf auf yt bestehen. Anstattdessen wird die 
ZdtreOie 



55 



gemessen. Darin bedeutet 8t dn unabhingiges Rausciien mit Mitteiwert Null Unter der Vorasssetzung* daB z » 
{zi...zt-i}ondy = (yt^'-y^getteaei^t^dteGesamtwaiirschein^ 

60 

P(y.z) = P(yN»-Myi) IIP(y,fyw,.-Mywi)nP(2iiy,) ( 8b) 

damit Ulfit sidi die Recfaenvonchrift fCr den erwarteten nSdisten Wert der Zeitrdhe angeben 



to 



2D 



30 



40 



5 Ebenso kann der Gradient der Wab^eznEchkdtsfuafcdon flir das Thuning bmdmet weiden. FOr dea Fall, 
d«B cine GauBverteSong des RawsAeiB mtt 



vwliegt^ergibtsicli: 



><P**(yi.~-yMrlz)^i~^^ (9a) 

Dem ncuronalen Netz werden beispielswebe Werte zngefflhrt, <fic vemosdit oder nicfat genau bcstinunbar 
skuL Durch die Appnnmitation der Gewidite im neimmaien Netz werden dabei fflser die P^fflkdcm ( welcfae 
dabd durcii das aenronale Netz nachgeblldet wird xieue Werte der Zeitrdhe bestimmban Diese neoea Werte 
der Zettreibe werden xm AnschluO dem oenronalen fietz NNw zugeRbrt, wdcfaes daraos wiedenun durdi 
Nachbildimg der Fonktsoa f aeue Werte der ZcitreSie beatimmt Dieser iterative Vorgang wild soiange fortge- 
setzt bis cine lunrdcbeixie Genanigkeit der zu bestimmenden Werte errddit wurde. 

Zor genaaea Bestimtming fehlender Werte mH Hilfe der Moi^ von folgenden GnnxOa^ 

gen ausgegangen. En ist hier zu beachten^daB aUe LOsungendie Fbna 



ih(a,m)P(ulm)du (9b) 



atifwcijcn, wobd u den Satz von unbekannten Variablen und m dea Satz von bekamtten Yariablen bedeutet En 
35 Integral dieser Fonn kann beispidsweise ge!5$t werden, indon ZoMsproben der unbduumten Variablm 
gemifl P(n| m) gezogen werdea Beaptdgweise werden dese Proben mit . . , n* bezeidinet Damns ergfot sfcfa 
fc^gertder Zusaimnenfaang fflr die Annahenmg: 



Jli(u,m)P(cIm)da« ^^Ku'.m) . (9c) 



£s Bt ZU beaditen, daS m dimr Gieiduing ti den Wert yc - b wei^^ 

45 nOSeaLOsungreduzieftsic^dasPrc^emal^ 

eine Variable f efal t, also beisptelswdse le^gfich eine RllckfOhning au^etrennt wurdCi reduziert sich das Probten 
also aof das Profaenziehen aos eher emvariab len Vcrtdlung; wdfche mit Hgfe des "sampIktg-miportanceHPesani- 
pling* Oder aoderen sampting-Tecfamken [1] g^an werden kaim. 
F^ 2 zeigt ein BlocfcsdballbUd zur VcfdeutHchnng des erfkxdazigsgezni&Ben Verfehrens. Das nenronale Netz 

SD NNw«)0 hier das teduusche System f ^euem. Zum cinen ist das neuronale Netz NNw dargestellt und zum 
andarm das tednaachfi System L Die Infees t end t- 1 and tfie zeidieben A hhgfigig1c?t*im der ernggfaem Wcate 
vcHieinanderabgegeben. Der index —1 bedeutet dabd, daB der betnditete Wert adi in der ZdtreSievordeni 
Wert befindeti wddier den Index t hat Vom neurcmalen Netz wird (&er die Verbindtmgddtong 150 (fie 
SteOgrSBe tu- 1 an das tedmisdie System f abgegdsen. Untcrw^ wnd dieser ^ 

55 BenVerfdiFenandna- Vei^n(4tfungsstelle"+"ndtdnem 

gert Dem tedmisdien System f wird dieser Wert Ot^i -f 6 zusammen mit dm W^ yt-i zug^ifart Das 
tedinisdie System f reagiert anf d^e StdlgrCBe, indcn es emc Regdgr5Be yt erzeogt Diese RegdgF5fie wird 
einem VerzogemngsgUed Zl zugdHfart, weidw befs^ndswexse g}ddadtig eine AddidOT^unktkm enlbftit Db- 
ses Ver zQge r un gsgfied v en pSgert beiqudsweoe dm yun tedmisdien System abg^eboien Wert yt urn ene 

60 Zeitrinbeit,mngodenK!ngangswm(lfaerdieLeidmg taOfltrd^ 

kdnnen. Wester wird dieser Wert yt-t andi fiber die Ldtmig 100 an das netiTonale Netz NNw abgegd^oL 
/insfltzlidi ist m 2 das Ransdien 8 dargestellt; weldies bd^dswdse an dsr Verknt^ifdngsstcOe nnd dem 
Vo^enmgsglied Zl der Regelgr^ Qberfagert werden kann. Diese Art der Ob^Iagenmg ist jedodi mdit 
notwencfige Voranssetcmig f&r die Fonktbnsfflii^^ 

as Beigndsweise adit das System erne HeizonesaiiiagB dar, das einen Zostand yt- 1 zcm Zeitpunkt 1 and eine 
Kontroflaktion zum Zeitpimkt 1» wddie ais m-i bezeidmet is^ wie etwa BnsdaUen, anf einen oeoen 
Zustand zum Zdtpuokt 1; der mtt yt bezeidmet ist, abbtldet Femer wird bdspieiswdse dn gewQnsdites 
SoliverbaitCT durdi eine Kicstenfdnktton C(y) vorgegeben, di^ 
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wcise, das System mh cinem ncuronalen Netz NNw so za steiera, dafi die Kosten minumcrt werdea Voraugs- 
weise konn^ die Kosten m ferner ZuJamft beJspiclsweise sdiwacher gewichtet weidea Hierzu wird beispieb- 
weise ein Atedilagsfaktor * emgefOhrt, wobei 0 ^ y ^ 1 Hierzu raussen die Ptouneter d» Netzes NNw, 
also dessen Gewicfate richtig dogcstcllt d. h. trainiert werden. Dies erfolgt vorzugsweise mittds Gradieiitenab- 
stieg. Dafaei dilrf en Ut und yt, auch Yektoren sein, dte Kostenfunktion kann ouch zeitabhangig sein, wie bcispiels- s 
weise Q (yt). We AnfangsbedingungHi mussea dabd oidit fest sein, was kein ProWcm bei der L5scmg nachdem 
erfinduiigsgcmiBen Verfahren darstdlt Im erfindungsgemaBea FaD werdea das technisdhe System tmd das 
neuronak Netz als nicht detenninistisch behandek. Zvm Training des Netzes muB voraigsweise der Gradient 
der Kosten nach den GewiclEten bestimmt werden. Dies^ ist in (1 i angegebeiu 

Vorzugswdse wird bdra erfindcngsgemaBen Verfahren das System simuficr^ o&r das reaie System benutzt lo 
und <fie Steflgrefle raittds Gaufirauschen uberlagcrt Me Kosten sind mm Zufallsgr58e mid durch <fic deidmng 

^^^Dal^l vcn^^idet das Prodokt der Abldtung, welches sich bei einer determimstisdien LSsung, cfie hier ak^t 
dargestcilt ist, erg^en wiitdeL Das neoronale Netz wird nun zmiictat mitteb a&Dsdaten initialisiert, d L die 
Gcwichte werden irgeadwic cingestefit AnschfieBend wird das reale System mit den venaxscfaten Stellgr5flen is 
betrieben. miafahatagig davon kann audi ein Modefl verwendct werden, nnd es werden die StellgrdBen beobach- 
tct, wdche vom System abgegeben wcrdttt Vorzugsweise wird von mehreren Dnrchiaufen dca Systems dne 
Zeitreihe aufgcnommcn. Dabei werdai beispielsweise sowofai die SteflgroBen als auch die Regel^Bcn proto- 
kolliert Ira AnschluB wird diese Zeitreihe dem neuronalen Netz zagefiihrt» urn cme gunstige Steuenmg des 
tcdmischen Systems za eiionen. Durch die vorgegebcne Kostenfunktkm werden dabei sckt^ Gewichtsvcrfin- ao 
denmgen am neuronalen Netz begilnsttgt, d. h. verstarkt oder weniger ged&mpft, welche geringerc Kosten 
bewirken. Falls dieses Trainingsverfahren mehrfadid^rchgefohrt wird, d h. ftdls mehrere Zdtreihen an^enom- 
men werden, mid mit diesen das neuronale Netz trainiert wml, so ergibt sich cine sefar zuveriasage Emstellung 
der Gewlchtc des neuronalen Netzes- UnaUitogig von der bei^ielhaft vorgesteUten Kostcnfunktwn kdnnen 
auch andere Kostenfunfctbnen angedacht werden. Lctztendlich ist es wichti^ da3 diese Kostenfunktfon cine s 
Vers^kung, bzw. Abschwtchung der am Netz eii^telltcn Gewfchtsfafctorcn bezOglich cines gfinstigen Sy- 
stemverfaaltccs des tcdmischen Systems enreicht ^ ^ 

Durch das erfindungsgemaSe Verfahren kann anf dcse Weise uber dner statistisdien Verteilmig der Zeitre- 
htti mittds zoMSg gestdrter SteUgrSBen dne Einstellung der Gewfchte am neuronalen Netz gefimdcn werden, 
welche ein gOnstiges Soliverbdten des tcdmischen Systems bewirkt 30 

Fig. 2 CTiautert wdter dn Beispi d des erfindungsgemaBen Vef ahrens anhand ernes B lockschald)9des. GemSfi 
diesem Bdspid sei eine Zeitreihe der Form: 

gegebenmit 
und 

TilntervaabrdtezurErreidumgdesSollzastandes- . 

Nach dem erfindungsgem5Ben Verfahr«i soli mm das n«ironalc Netz so trahuert werden, indcm die emzustd- 
lenden Gewkfat an den Nraronen so gewaUt werden, daB de gem3fi dn^- Kostenhmfctkm zu bewertenden 45 
erwarteten Kosten innerfaalb des Interfiles T miniraiert werden. Diese lassen sich aflgemein als 



E(cost)aJ]£y^^yJP(y,,-^,yr)dyi,--MdyT 
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darsteHen mit; 

y ^ 1 Abschlagsf akxor fflr zukunf tige Werte do" Zdtrdte 55 



P{yi,-.-tyT) = P(yi)EC<iP(yttw) 

SD 

Wahrschexniichkeit fUr das Auf treten bestimmter Wdte imierimlb der Zeitreihe 

Um das Regdverhaltcn des n^nx>aalen Netzes zu optimiercDf wird gemiB dem erfindungsgemlScn Verfah- 
ren zunfichst der Gradient der zu crwartaaden Kosten no* dei Gewichten des neun>nden N^ 
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diese Usdig fa»nn durch stiochastbcbes Sacnpfing appruiiuiiert werdeOf indem. die Gletdiimg (9c) analc^ 
angewendet winl, das heist in diesem Fall daB <bs aei^ 

setttem Modefl mehitre Zeh^en tang betrieben wbtl and daB mdirere ZetreiheQ von y and u aufgenommen 
weiden. Die Mittdwerd>ildung der mit diesen Zettrahen gebOdeten Gradieaten, tthrt dann zn den Werten, 
welche fOr das TVahang Verwendung findea FaDwdse kann es hierzu j edocfa goosdg sein <Be Kostenfunkdon so 
2ti gcstaltcn, daB grcBe Gcwichtc an dnzeben Neuronen bestraft werden, also babe Kosten verorsacben^ oder 
die Zahl und StSrke der SteneraktUHien des Netzes berOcksicbtigt, mn unendHch staiiEe Steumktbnen vermd- 
den zn kdnnen. Mit der obigen Vbraussetzuog fOr ut er^bt soch 



3E(cos t) 
3w 



ais Gnufient fQr die za enrartenden Kosten. Dordi anaioge Anwendong voa (te) vcrdnfadit achdieser za 
9E(C0St) 



aw 



§i/ir^' (y u>ttu) x[t ^a^^""^ - nn, (y ^))] (i2##) 



nut: 



T: Anzidil der Zestemhetten je Zdtrahe 
S: Anzahl der Zeitreihen 

7 ^ 1 AbscblagsfoktOTfDrziikanfdgeWertederZeitrd^ 
NNw: vom neoroDalen Netz erzeiigter Wert 

PatentansprOche 

L Verfahren znm Training m&t neoronalen Netzes not dem indit dete nn tni st ischen Verhsdten eines 

a) bei dem das neurooaie Netz mit dem tecfaniscfaen Ssrst^ oder einem ModeO davon so m einen 
Regelkrets engebunden wkd* daB das nem>iiale Netz als AusgangsgrSSe mfaidestens cine &£l}gr5fie 
an das tecfadsdie SystexD* oder sefai Modell abgibt and (tes ledu^^ 

vom neuronalen Netz lugeft&rtea SteOgiofie^ mffldestem 
lean Netz ab Bngangsgr5Be zugdMat wird 

b) bei dem die S tellgrOBe mit einem Ransdien von bekannter RaoscbverteHnng dsetlagert wirxL bevor 
sie dem tcdmwdien System oder seincm Modefl zogeftbrt wird, 

c) und bd dem die Gewidite des nemwalen Netzes m Reataion auf die dmcfa das aufgqydlgte 
Ransdien TOrindate Regdgrdfiewie Mgt etEgestdh werden: 

es wird von ciner Kostenfonktion bewertet; ob die Gewidttsftnderung am Netz^ die nadi b ehmntMi 
Ixrnvex&hrea emgestdk wird. rae Verbessernng der R^dgr^ 

tff^ni^^ftn. Syrtrms h<rw^ Crgw^chtsginst^mgeit werdm dimA die Kostenfdnkfioa 

begOostigt 

2. Verfahren nadiAnspmdi l,bddemdieGewk±tsdiiste]ItmgendoididBeKostenfi^^ 
b nwn t f I wcrdr". 5>b rf^r "^^''nmg am Netz, die nadi b drannt e n Lemverfafareo dngesteflt mrdt 

cine Versdila±tcning der RcgdgrdBe m Bezug auf dn Soilverhaltcndcs tcdimsdira Systens bcwirkt hat 
und 9ok^ Gemditsehstdlnngen dsrdi die Kosteitfm^^ 

1 V«*fahfen nadi An^mdi 1 oda % bd den die Gewkfate des netuonalai Netza k Reaktion auf (fie 
durch das au^eprtgte Rausdien vertnderte Ri^elgrdBe wie folgt eingesleUt werden: 

i) die Neuraneogewkfate werdm bdieUg milialinert; der Regdkrds wird efate Mdirzahl vchl Zdpy- 
klen foetiidsen and es werden sowohl die RegelgrOBe^ als aijch die SteKgidBe in Form von je dner 
Zeitreihe protokoDiert, 

0) (fie NeuronengewudUe wmien nadi bdcanaten Lerowfahren dogestellt imd es wvd jewdls fflr 
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jeden Wert der Zehrdhe Gradient der Cewidits^dening an den Neuronen m AUxangigkeit der 
StellgrdSe und des bekaxmten jRaiischens besdmrnt, wobei dieser Vorgang mdirfacfa wiederholt wxrd 
und dabei von einer Kostesfunktion bewertet wird, wie gttnstig sicfa die Regelgrdfie in Bezug atif em 
Soliverbalten des tedmisdiea Systems sis Reaktioa 

4. Verlahren nacb Ansprudi X bei dem eine Vtelzahl v<hi Zeitreifaen aufgenommen werden und die Nenro* s 
nengewichte fOr jeweib eine Zeitreihe tesdmrnt werden, welche als Einzeiverte (Be arithmedschen Mittel- 
werte der aufgeoommeoen Zeitreihen hat 

5. Verfahren nacfa einem der vorangdienden Ansprficfae, bei dem Eme CauBverteilung als bekannte 
Rauschverteiltmg Yerweadet wird. 

6. Verfahren nach Anspnicfa 4, mh einer Zeitraher (fer Form: to 



15 



nut: 



NNw: vom nennmaien Netz eraeagter Wert 

bei dem die Gemchte an den Neuronen wie folgt bestnnmt weiden! 



9E(cost) 
3w 



3S 



30 



nut: 

T: Anzahl der 2^iteinhdten je Zeitreihe 
S: Anzahl der 2^itreifaen 

y ^ 1 Abschlagsfaktor fOrzukdnftige Werteder ZeitrriheL 

7. Verfahren nadi einem der vorangdienden AnsprOdie, bm dem die R^;e^^fie mit einem Rausdien von 35 
bekannter Ransdiverte%mg der Form 

40 

flberiagert wM mit: 

45 



Hierzu 1 S€itc(n) Zetchmmgen 
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